Manuel Ávila sinh ra ở Teziutlán, một thị trấn nhỏ nhưng kinh tế quan trọng ở Puebla, cha mẹ trung lưu, Manuel Ávila Castillo và Eufrosina Camacho Bello. Anh trai Maximino Ávila Camacho là một nhân vật nổi bật hơn. Có một số anh chị em khác, trong đó có một em gái, María Jovita Ávila Camacho, và một vài anh em. Hai anh em của ông, Maximino Ávila Camacho và Rafael Ávila Camacho, từng là thống đốc của Puebla. Manuel Ávila Camacho đã không nhận được bằng đại học, mặc dù ông học tại trường dự bị quốc gia.